1b3d529bb93e86ea1a33340f9870d551454d3f1b
base v6

 

challenge
Punctuation prediction from conversational language
submitter
Oskar Bujacz
submitted
2023-03-13 21:11:17.298833 UTC
file basename
out

test-B / 82f9d579a6f43ffc2050401802a88afef658534d
Metric Score
Weighted-F1 83.30
Hyphens-F1 100.00
Comma-F1 82.83
Ellipsis-F1 60.46
Fullstop-F1 92.59
QMark-F1 80.10
Colon-F1 100.00
Excl-F1 0.00

test-A / bd17e1d3d62cc544b4bfed0358f254df27765dbd
Metric Score
Weighted-F1 79.24
Hyphens-F1 100.00
Comma-F1 80.75
Ellipsis-F1 50.75
Fullstop-F1 92.38
QMark-F1 85.45
Colon-F1 100.00
Excl-F1 6.45

dev-0 / fbfeb291a141917710a33a2213b099ee0959473d
Metric Score
Weighted-F1 85.73
Hyphens-F1 100.00
Comma-F1 86.38
Ellipsis-F1 43.41
Fullstop-F1 94.56
QMark-F1 90.12
Colon-F1 100.00
Excl-F1 0.00

worst items

note: the gold standard is taken from the challenge
# input expected output actual output test-B Ellipsis-F1
1 audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Wie:119580-119670 pan:119700-119760 co:119790-119880 O O B-ELLIPSIS O O O 0.00
2 audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Proszę:196770-196920 pana:196980-197100 a:197130-197130 co:197280-197340 powinien… O O O O O O B-ELLIPSIS O O O O O O O 0.00
3 audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Tak:52320-52410 więc:52440-52560 poproszę:52770-53460 O O B-ELLIPSIS O O O 0.00
4 audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Dziękuję:70560-70950 bardzo:71040-71340 Już:71430-71520 sobie:71610-71760 wprowad… O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O… O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O … 0.00
5 audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Na:129600-129660 ten:129720-129810 moment:129870-130140 te:130260-130290 terminy:… O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O … O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O … 0.00
6 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Numer:33990-34200 klienta:34320-34710 to:34800-34890 dwa:34980-35160 dwa:35220-354… O O O O B-ELLIPSIS O O O O O 0.00
7 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Nie:84420-84450 no:84540-84570 nie:84840-84870 Na:85020-85050 jaką:85110-85290 kwo… O O B-ELLIPSIS O O O O O O O O O O O O O O O O O 0.00
8 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Cztery:94770-95010 Ale:95100-95190 dlaczego:95250-95520 aż:95580-95610 tak:95700-9… B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
9 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 To:107670-107700 co:107880-107940 to:108000-108030 są:108120-108360 Z:108510-10851… O O O B-ELLIPSIS O O O O B-ELLIPSIS O O O O O O O O O 0.00
10 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Jakie:145620-145800 odsetki:145860-146280 Przecież:146340-146610 ja:146670-146700 … O O O O O O O O O O B-ELLIPSIS O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O 0.00
11 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 No:166200-166230 dobrze:166290-166440 to:166530-166590 co:166680-166740 ja:166770-… O O O O O O O B-ELLIPSIS O O O O O O O O 0.00
12 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 żebyście:168270-168600 państwo:168660-168900 znowu:168960-169170 włączyli:169260-1… O O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O 0.00
13 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Czyli:174750-174870 dostanę:174900-175290 ją:175410-175590 Zaraz:175680-175860 pan… O O B-ELLIPSIS O O O O O O O O O 0.00
14 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Muszę:197700-197850 tylko:197910-198120 mam:198210-198300 tylko:198360-198510 możl… O B-ELLIPSIS O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
15 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 I:203310-203310 po:203520-203550 prostu:203610-203790 wpłacić:203910-204270 to:204… O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O 0.00
16 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 O:216540-216540 Boże:216660-216900 Czyli:217350-217470 O O B-ELLIPSIS O O O 0.00
17 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 To:19830-19860 dobrze:20700-20940 już:21060-21150 poproszę:21300-21720 O O O B-ELLIPSIS O O O O 0.00
18 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Ta:72960-73020 B-ELLIPSIS O 0.00
19 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 to:115170-115230 B-ELLIPSIS O 0.00
20 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Termin:122520-122820 płatności:122970-123660 minął:123810-124290 O O B-ELLIPSIS O O O 0.00
21 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Wie:125970-126030 pani:126120-126240 co:126330-126360 Chwileczkę:126420-126780 Nie… O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
22 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 To:141600-141630 ze:141750-141810 względu:141870-142140 na:142200-142260 notę:1423… O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O 0.00
23 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Wartość:155340-155640 samej:155670-155940 O B-ELLIPSIS O O 0.00
24 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 No:203430-203490 B-ELLIPSIS O 0.00
25 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 No:221580-221610 ja:221700-221760 nie:221850-221880 jestem:221970-222240 w:222330-… O O O O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O 0.00
26 audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Mhm:20040-20040 dobrz:20280-20280 O B-ELLIPSIS O O 0.00
27 audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Poprosiłabym:29460-30150 A:30630-30630 imię:30930-31080 nazwisko:31140-31530 pani:… B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
28 audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 Darkowska:13410-13440 No:14550-14580 wie:14670-14730 pani:14820-14970 co:15120-151… O O O O O O O O O O O O O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
29 audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 Wie:55410-55470 pani:55530-55620 ja:55650-55680 jestem:55710-55890 współwłaściciel… O O O O O O O O B-ELLIPSIS O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O 0.00
30 audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 No:122910-122940 ale:123000-123090 to:123210-123270 najpierw:123330-123630 jeżeli:… O O O B-ELLIPSIS O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
31 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 wyjaśniamy:86850-87360 że:87450-87510 stany:87570-87780 licznika:87840-88170 na:88… O O O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O 0.00
32 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 Dobrze:118500-118800 proszę:118890-119100 napisać:119160-119460 w:119520-119520 ta… O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O 0.00
33 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 Tak:129330-129450 oczywiście:129570-130020 Otrzyma:130110-130500 też:130620-130680… O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
34 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 W:135690-135690 tym:135780-135840 momencie:135930-136290 O O B-ELLIPSIS O O O 0.00
35 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 tak:137310-137370 jak:137400-137550 mówiłam:137610-137940 Prosiłabym:137970-138450… O O O O O O O O B-ELLIPSIS O O O O O O O O O 0.00
36 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 od:141270-141330 tej:141450-141510 decyzji:141570-141900 na:141990-142020 adres:14… O O O O O B-ELLIPSIS O O O O O O 0.00
37 audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e A:18570-18570 czy:18660-18720 jest:24600-24720 pani:24750-24900 właścicielem:36480… O B-ELLIPSIS O O O O O O O O O O O O O O 0.00
38 audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e Wygląda:58290-58530 na:58620-58680 to:59550-59610 że:59700-59760 to:60030-60090 ko… O O O O O B-ELLIPSIS O O O O O O 0.00
39 audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e Zaraz:60540-60900 zaraz:66690-67260 chwileczkę:67290-67560 pani:67590-67890 powiem… O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O 0.00
40 audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e Domagala:151770-151770 tak:153930-154080 Kropka:154200-154590 O O B-ELLIPSIS O O O 0.00

Compare with other submission